تجزیه و تحلیل دستی داده های بزرگ با Hadoop 3 [ویدئو]

سرفصل ها و درس ها

HDFS و HBase - پایگاه داده Hadoop HDFS and HBase – The Hadoop Database

• بررسی اجمالی دوره The Course Overview

• چرا HBase؟ Why HBase?

• HDFS و HBase HDFS and HBase

• مفاهیم پایگاه داده ستون گرا Column-Oriented Database Concepts

• ایجاد پایگاه داده HBase – با استفاده از HBase از جاوا Creating an HBase Database – Using HBase from Java

• استفاده از Sqoop برای وارد کردن داده به HDFS Using Sqoop to Import Data to HDFS

پردازش داده با استفاده از MapReduce Data Processing Using MapReduce

• MapReduce Job Architecture MapReduce Job Architecture

• یادگیری مفاهیم کلیدی Spark - زمینه Spark، درایور و RDD Learning Spark’s Key Concepts – Spark Context, Driver, and RDD

• Spark API – برنامه نویسی کاربردی با استفاده از Spark Spark API – Functional Programming Using Spark

• جرقه تحولات و اقدامات Spark Transformations and Actions

• نوشتن MapReduce Jobs با استفاده از Apache Spark Writing MapReduce Jobs Using Apache Spark

تجزیه و تحلیل داده ها با استفاده از Hive and Pig Analyzing Data Using Hive and Pig

• مقدمه ای بر خوک Introduction to Pig

• معماری کندو و موارد استفاده Hive Architecture and Use Cases

• زبان پرس و جو Hive Hive Query Language

• استفاده از Hive and Pig برای اجرای MapReduce Query Using Hive and Pig to Perform MapReduce Query

انجام تجزیه و تحلیل رویدادها در زمان واقعی با استفاده از Spark Streaming Performing Real-Time Events Analysis Using Spark Streaming

• معرفی Spark Streaming Introducing Spark Streaming

• مدیریت زمان در جریان های پرسرعت Handling Time in High-Velocity Streams

• برنامه ساخت جریان Building Streaming Application

• فیلتر کردن ربات ها از جریان رویدادهای نمایش صفحه Filtering Bots from a Stream of Page View Events